Impression Share Prediction: An Offline Evaluation Task for Ranking Systems
曝光份额预测：排序系统的离线评估任务
🧭 排序系统离线评估 · 曝光份额预测 ★ 深度解读
Meta Platforms, Inc.
提出曝光份额预测作为离线评估任务，用因果模型识别并预测候选排序模型的目标桶曝光分布，首小时Transformer rollout提升22% L1
📌 工作参考价值（4 点）
- 在电商/广告多目标排序上线前，除了 AUC/NE/RIG，增加一个“曝光份额偏移”预测器：用候选模型离线打分分布（log-bin 直方图 + mean/var）和 coverage 向量预测其可能把曝光从高价值目标（成交/支付）挪到低价值目标（点击/浏览）的比例，提前拦截收益风险。
- 识别环节可用论文的 SCM：由于模型状态 A 由架构/训练决定、不受当前容量状态 D 反向影响，P(Y|do(A),D)=P(Y|A,D)，无需 IPW/domain adversarial 等复杂纠偏；如果业务中有类似“策略不反向影响系统状态”的结构，可直接用观测数据做反事实预估。
- 工程上优先用简单 RF + 特征（22维置信度 + 容量）即可拿到 seen models 的 49% L1 提升；若做新模型冷启动预测，首小时必须替换成近期容量动态的序列编码器（如 PatchTST 2h rollout），否则可能比均值基线还差 20%。
- 对 LLM/Agent 生成式推荐：若未来要把 LLM 作为 ranking 模块放进共享流控/预算系统，其 score distribution 和 coverage 特征同样可以用来预估曝光分配，避免只盯文本质量指标。